Fundus image analysis for automatic screening of ophthalmic pathologies

En los ultimos años el número de casos de ceguera se ha reducido significativamente. A pesar de este hecho, la Organización Mundial de la Salud estima que un 80% de los casos de pérdida de visión (285 millones en 2010) pueden ser evitados si se diagnostican en sus estadios más tempranos y son tratados de forma efectiva. Para cumplir esta propuesta se pretende que los servicios de atención primaria incluyan un seguimiento oftalmológico de sus pacientes así como fomentar campañas de cribado en centros proclives a reunir personas de alto riesgo. Sin embargo, estas soluciones exigen una alta carga de trabajo de personal experto entrenado en el análisis de los patrones anómalos propios de cada enfermedad. Por lo tanto, el desarrollo de algoritmos para la creación de sistemas de cribado automáticos juga un papel vital en este campo. La presente tesis persigue la identificacion automática del daño retiniano provocado por dos de las patologías más comunes en la sociedad actual: la retinopatía diabética (RD) y la degenaración macular asociada a la edad (DMAE). Concretamente, el objetivo final de este trabajo es el desarrollo de métodos novedosos basados en la extracción de características de la imagen de fondo de ojo y clasificación para discernir entre tejido sano y patológico. Además, en este documento se proponen algoritmos de pre-procesado con el objetivo de normalizar la alta variabilidad existente en las bases de datos publicas de imagen de fondo de ojo y eliminar la contribución de ciertas estructuras retinianas que afectan negativamente en la detección del daño retiniano. A diferencia de la mayoría de los trabajos existentes en el estado del arte sobre detección de patologías en imagen de fondo de ojo, los métodos propuestos a lo largo de este manuscrito evitan la necesidad de segmentación de las lesiones o la generación de un mapa de candidatos antes de la fase de clasificación. En este trabajo, Local binary patterns, perfiles granulométricos y la dimensión fractal se aplican de manera local para extraer información de textura, morfología y tortuosidad de la imagen de fondo de ojo. Posteriormente, esta información se combina de diversos modos formando vectores de características con los que se entrenan avanzados métodos de clasificación formulados para discriminar de manera óptima entre exudados, microaneurismas, hemorragias y tejido sano. Mediante diversos experimentos, se valida la habilidad del sistema propuesto para identificar los signos más comunes de la RD y DMAE. Para ello se emplean bases de datos públicas con un alto grado de variabilidad sin exlcuir ninguna imagen. Además, la presente tesis también cubre aspectos básicos del paradigma de deep learning. Concretamente, se presenta un novedoso método basado en redes neuronales convolucionales (CNNs). La técnica de transferencia de conocimiento se aplica mediante el fine-tuning de las arquitecturas de CNNs más importantes en el estado del arte. La detección y localización de exudados mediante redes neuronales se lleva a cabo en los dos últimos experimentos de esta tesis doctoral. Cabe destacar que los resultados obtenidos mediante la extracción de características "manual" y posterior clasificación se comparan de forma objetiva con las predicciones obtenidas por el mejor modelo basado en CNNs. Los prometedores resultados obtenidos en esta tesis y el bajo coste y portabilidad de las cámaras de adquisión de imagen de retina podrían facilitar la incorporación de los algoritmos desarrollados en este trabajo en un sistema de cribado automático que ayude a los especialistas en la detección de patrones anomálos característicos de las dos enfermedades bajo estudio: RD y DMAE.In last years, the number of blindness cases has been significantly reduced. Despite this promising news, the World Health Organisation estimates that 80% of visual impairment (285 million cases in 2010) could be avoided if diagnosed and treated early. To accomplish this purpose, eye care services need to be established in primary health and screening campaigns should be a common task in centres with people at risk. However, these solutions entail a high workload for trained experts in the analysis of the anomalous patterns of each eye disease. Therefore, the development of algorithms for automatic screening system plays a vital role in this field. This thesis focuses on the automatic identification of the retinal damage provoked by two of the most common pathologies in the current society: diabetic retinopathy (DR) and age-related macular degeneration (AMD). Specifically, the final goal of this work is to develop novel methods, based on fundus image description and classification, to characterise the healthy and abnormal tissue in the retina background. In addition, pre-processing algorithms are proposed with the aim of normalising the high variability of fundus images and removing the contribution of some retinal structures that could hinder in the retinal damage detection. In contrast to the most of the state-of-the-art works in damage detection using fundus images, the methods proposed throughout this manuscript avoid the necessity of lesion segmentation or the candidate map generation before the classification stage. Local binary patterns, granulometric profiles and fractal dimension are locally computed to extract texture, morphological and roughness information from retinal images. Different combinations of this information feed advanced classification algorithms formulated to optimally discriminate exudates, microaneurysms, haemorrhages and healthy tissues. Through several experiments, the ability of the proposed system to identify DR and AMD signs is validated using different public databases with a large degree of variability and without image exclusion. Moreover, this thesis covers the basics of the deep learning paradigm. In particular, a novel approach based on convolutional neural networks is explored. The transfer learning technique is applied to fine-tune the most important state-of-the-art CNN architectures. Exudate detection and localisation tasks using neural networks are carried out in the last two experiments of this thesis. An objective comparison between the hand-crafted feature extraction and classification process and the prediction models based on CNNs is established. The promising results of this PhD thesis and the affordable cost and portability of retinal cameras could facilitate the further incorporation of the developed algorithms in a computer-aided diagnosis (CAD) system to help specialists in the accurate detection of anomalous patterns characteristic of the two diseases under study: DR and AMD.En els últims anys el nombre de casos de ceguera s'ha reduït significativament. A pesar d'este fet, l'Organització Mundial de la Salut estima que un 80% dels casos de pèrdua de visió (285 milions en 2010) poden ser evitats si es diagnostiquen en els seus estadis més primerencs i són tractats de forma efectiva. Per a complir esta proposta es pretén que els servicis d'atenció primària incloguen un seguiment oftalmològic dels seus pacients així com fomentar campanyes de garbellament en centres regentats per persones d'alt risc. No obstant això, estes solucions exigixen una alta càrrega de treball de personal expert entrenat en l'anàlisi dels patrons anòmals propis de cada malaltia. Per tant, el desenrotllament d'algoritmes per a la creació de sistemes de garbellament automàtics juga un paper vital en este camp. La present tesi perseguix la identificació automàtica del dany retiniano provocat per dos de les patologies més comunes en la societat actual: la retinopatia diabètica (RD) i la degenaración macular associada a l'edat (DMAE) . Concretament, l'objectiu final d'este treball és el desenrotllament de mètodes novedodos basats en l'extracció de característiques de la imatge de fons d'ull i classificació per a discernir entre teixit sa i patològic. A més, en este document es proposen algoritmes de pre- processat amb l'objectiu de normalitzar l'alta variabilitat existent en les bases de dades publiques d'imatge de fons d'ull i eliminar la contribució de certes estructures retinianas que afecten negativament en la detecció del dany retiniano. A diferència de la majoria dels treballs existents en l'estat de l'art sobre detecció de patologies en imatge de fons d'ull, els mètodes proposats al llarg d'este manuscrit eviten la necessitat de segmentació de les lesions o la generació d'un mapa de candidats abans de la fase de classificació. En este treball, Local binary patterns, perfils granulometrics i la dimensió fractal s'apliquen de manera local per a extraure informació de textura, morfologia i tortuositat de la imatge de fons d'ull. Posteriorment, esta informació es combina de diversos modes formant vectors de característiques amb els que s'entrenen avançats mètodes de classificació formulats per a discriminar de manera òptima entre exsudats, microaneurismes, hemorràgies i teixit sa. Per mitjà de diversos experiments, es valida l'habilitat del sistema proposat per a identificar els signes més comuns de la RD i DMAE. Per a això s'empren bases de dades públiques amb un alt grau de variabilitat sense exlcuir cap imatge. A més, la present tesi també cobrix aspectes bàsics del paradigma de deep learning. Concretament, es presenta un nou mètode basat en xarxes neuronals convolucionales (CNNs) . La tècnica de transferencia de coneixement s'aplica per mitjà del fine-tuning de les arquitectures de CNNs més importants en l'estat de l'art. La detecció i localització d'exudats per mitjà de xarxes neuronals es du a terme en els dos últims experiments d'esta tesi doctoral. Cal destacar que els resultats obtinguts per mitjà de l'extracció de característiques "manual" i posterior classificació es comparen de forma objectiva amb les prediccions obtingudes pel millor model basat en CNNs. Els prometedors resultats obtinguts en esta tesi i el baix cost i portabilitat de les cambres d'adquisión d'imatge de retina podrien facilitar la incorporació dels algoritmes desenrotllats en este treball en un sistema de garbellament automàtic que ajude als especialistes en la detecció de patrons anomálos característics de les dos malalties baix estudi: RD i DMAE.Colomer Granero, A. (2018). Fundus image analysis for automatic screening of ophthalmic pathologies [Tesis doctoral no publicada]. Universitat Politècnica de València. https://doi.org/10.4995/Thesis/10251/99745TESI

An approach to developing a neurophysiological index capable of predicting a student's cognitive performance from classroom design

[EN] Classroom design influences cognitive functions such as memory and attention. This relationship between environment and performance is complex, and the cognitive and neurophysiological effects are closely intertwined. The aim of this paper is to lay the foundations for a methodology capable of assessing the impact of classroom design on students' attention and memory, using automated cognitive indices based on neurophysiological measures. To this end, a laboratory study was carried out in which 50 subjects performed cognitive tests in virtual environments with different design configurations. During the tests, their psychological responses (attention and memory performance) and neurophysiological responses (electrocardiogram, electroencephalogram, and electrodermal response) were recorded. After processing the signals and extracting different metrics, correlations between the two types of responses were studied. This provided a basis of relationships for the future choice of metrics with which to train predictive models. The use of Artificial Intelligence will make it possible to automatically quantify the impact of classroom design on students' attention and memory, using indices based on neurophysiological measures.[ES] El diseño del aula influye en las funciones cognitivas, como la memoria y la atención. Esta relación entre entorno y rendimiento es compleja, y los efectos cognitivos y neurofisiológicos están estrechamente entrelazados. El objetivo del presente trabajo es centrar las bases de una metodología capaz de evaluar el impacto del diseño del aula en la atención y memoria de los alumnos, a partir de índices cognitivos automatizados basados en medidas neurofisiológicas. Para ello se llevó a cabo un estudio en laboratorio, en el que 50 sujetos realizaron pruebas cognitivas en entornos virtuales con diferentes configuraciones de diseño. Durante estas se registraron sus respuestas psicológicas (relativas al rendimiento en atención y memoria) y respuestas neurofisiológicas (electrocardiograma, electroencefalograma, y respuesta electrodérmica). Tras el tratamiento de las señales y la extracción de distintas métricas, se estudiaron las correlaciones entre ambos tipos de respuestas. Esto ofreció una base de relaciones para la futura elección de métricas con las que entrenar modelos predictivos. El uso de Inteligencia Artificial permitirá cuantificar de manera automática el impacto del diseño del aula en la atención y memoria de los alumnos, a partir de índices basados en medidas neurofisiológicas. Desarrollo con distintas aplicaciones en el área de la educación.Este trabajo ha sido financiado por el Ministerio de Economía, Industria y Competitividad de España (Proyecto BIA2017-86157-R; PRE2018-084051).Higuera Trujillo, JL.; Colomer Granero, A.; Naranjo Ornedo, V.; Llinares Millan, C. (2021). Una aproximación al desarrollo de un índice neurofisiológico capaz de predecir el rendimiento cognitivo de un alumno a partir del diseño del aula. Editorial Universitat Politècnica de València. 619-618. https://doi.org/10.4995/EDIFICATE2021.2021.13578OCS61961

Aircraft Dynamic Rerouting Support

In the frame of Clean Sky 2 JU, the HARVIS (Human Aircraft Roadmap for Virtual Intelligent System) project introduces a cockpit assistant committed to help the pilot to reroute the aircraft in single-pilot operations. A relevant scenario for this AI assistant is that in which diversion to alternate airfield is required after an emergency. Another interesting scenario is the anticipation of radar vectors in the arrivals with time enough to safely configure the aircraft for the descent. A demonstrator is being developed for this second scenario in the context of Project HARVIS (www.harvis-project.eu). Diversion is often required after system failure, medical emergency, or just for weather phenomena (dense fog, storms, etc.) in the approaching. During regular operation if a diversion is needed the pilot in command and first officer discuss on the multiple options they have and try to find out the one they think is the best. The AI assistant will take into account characteristics of nearby airports, METAR at destination, and facilities to take care of passengers, among other factors. It may then consider several options, assess the risks and benefits of each one, and finally inform the pilot accordingly. In this scenario, the digital assistant takes care of the Options and Risks in a FORDEC procedure

Toward a Non Stabilized Approach assistant based on human expertise

97% of Non-Stabilized Approach (NSA) are continued until landing going against Standard Operational Procedures (SOP). For some of these approaches, the reason is a lack of situation awareness for others it is because of operational constraints that standard SOP do not take into account like ATC, remaining fuel on board, weather… Most of the time everything goes well but pilots often admit afterwards that they should have go-around and that safety margins were greatly reduced

A Comparison of Physiological Signal Analysis Techniques and Classifiers for Automatic Emotional Evaluation of Audiovisual Contents

This Document is Protected by copyright and was first published by Frontiers. All rights reserved. it is reproduced with permissionThis work focuses on finding the most discriminatory or representative features that allow to classify commercials according to negative, neutral and positive effectiveness based on the Ace Score index. For this purpose, an experiment involving forty-seven participants was carried out. In this experiment electroencephalography (EEG), electrocardiography (ECG), Galvanic Skin Response (GSR) and respiration data were acquired while subjects were watching a 30-min audiovisual content. This content was composed by a submarine documentary and nine commercials (one of themthe ad under evaluation). After the signal pre-processing, four sets of features were extracted from the physiological signals using different state-of-the-art metrics. These features computed in time and frequency domains are the inputs to several basic and advanced classifiers. An average of 89.76% of the instances was correctly classified according to the Ace Score index. The best results were obtained by a classifier consisting of a combination between AdaBoost and RandomForest with automatic selection of features. The selected features were those extracted from GSR and HRV signals. These results are promising in the audiovisual content evaluation field by means of physiological signal processing.This work has been supported by the Heineken Endowed Chair in Neuromarketing at the Universitat Politecnica de Valencia in order to research and apply new technologies and neuroscience in communication, distribution and consumption fields.Colomer Granero, A.; Fuentes-Hurtado, FJ.; Naranjo Ornedo, V.; Guixeres Provinciale, J.; Ausin-Azofra, JM.; Alcañiz Raya, ML. (2016). A Comparison of Physiological Signal Analysis Techniques and Classifiers for Automatic Emotional Evaluation of Audiovisual Contents. Frontiers in Computational Neuroscience. 10(74):1-16. doi:10.3389/fncom.2016.00074S116107

Diseño, Desarrollo e Implementación de una Plataforma Modular y Multifabricante para la Visualización de Imágenes Médicas Funcionales

EL OBJETIVO FINAL DE ESTE TRABAJO, ES EL DE CREAR UNA PLATAFORMA DE ARQUITECTURA MODULAR, QUE PERMITA LA VISUALIZACIÓN DE IMÁGENES OBTENIDAS MEDIANTE RESONANCIA MAGNÉTICA Y ESTÉ PROVISTA DE LAS HERRAMIENTAS PRINCIPALES PARA TRATAR Y PROCESAR DICHAS IMÁGENES, FACILITANDO ASÍ, EL DIAGNÓSTICO FINAL AL FACULTATIVO.THE FINAL GOAL OF THIS WORK IS TO CREATE A MODULAR ARCHITECTURE PLATFORM THAT ALLOWS THE VISUALIZATION OF MAGNETIC RESONANCE IMAGES. THE APPLICATION HAS THE MAIN TOOLS FOR PROCESSING IMAGES, THUS FACILITATING THE FINAL DIAGNOSIS BY THE DOCTORColomer Granero, A. (2013). Diseño, Desarrollo e Implementación de una Plataforma Modular y Multifabricante para la Visualización de Imágenes Médicas Funcionales. http://hdl.handle.net/10251/32686.Archivo delegad

Análisis de Señales Fisiológicas. Aplicación a la Neuroeconomía

El presente trabajo fin de máster tiene como objetivo el análisis de señales fisiológicas registradas en un entorno de laboratorio durante la recreación de diferentes situaciones o experiencias. Para llevar a cabo el trabajo se ha investigado en diversos temas como el funcionamiento de los equipos de adquisición, el acondicionamiento de las bioseñales, la extracción de características y el análisis estadístico. El resultado final de esta tesina ha sido una aplicación para el análisis de todo experimento que se lleve a cabo en el laboratorio y dos publicaciones, una aceptada y otra en fase de revisión. La herramienta desarrollada será de vital importancia en los futuros estudios de investigación llevados a cabo en Labhuman. Campos como la neuroeconomía, la neurorehabilitación y la neuroarquitectura requieren del registro y posterior análisis de señales fisiológicas. A lo largo del documento, el lector irá descubriendo las técnicas más novedosas en el estudio de las emociones y sentimientos que afloran en el ser humano y el comportamiento del mismo.Colomer Granero, A. (2014). Análisis de Señales Fisiológicas. Aplicación a la Neuroeconomía. http://hdl.handle.net/10251/46300.Archivo delegad

Una aproximación al desarrollo de un índice neurofisiológico capaz de predecir el rendimiento cognitivo de un alumno a partir del diseño del aula

El diseño del aula influye en las funciones cognitivas, como la memoria y la atención. Esta relación entre entorno y rendimiento es compleja, y los efectos cognitivos y neurofisiológicos están estrechamente entrelazados. El objetivo del presente trabajo es centrar las bases de una metodología capaz de evaluar el impacto del diseño del aula en la atención y memoria de los alumnos, a partir de índices cognitivos automatizados basados en medidas neurofisiológicas. Para ello se llevó a cabo un estudio en laboratorio, en el que 50 sujetos realizaron pruebas cognitivas en entornos virtuales con diferentes configuraciones de diseño. Durante estas se registraron sus respuestas psicológicas (relativas al rendimiento en atención y memoria) y respuestas neurofisiológicas (electrocardiograma, electroencefalograma, y respuesta electrodérmica). Tras el tratamiento de las señales y la extracción de distintas métricas, se estudiaron las correlaciones entre ambos tipos de respuestas. Esto ofreció una base de relaciones para la futura elección de métricas con las que entrenar modelos predictivos. El uso de inteligencia Artificial permitirá cuantificar de manera automática el impacto del diseño del aula en la atención y memoria de los alumnos, a partir de índices basados en medidas neurofisiológicas.Classroom design influences cognitive functions such as memory and attention. This relationship between environment and performance is complex, and the cognitive and neurophysiological effects are closely intertwined. The aim of this paper is to lay the foundations for a methodology capable of assessing the impact of classroom design on students' attention and memory, using automated cognitive indices based on neurophysiological measures. To this end, a laboratory study was carried out in which 50 subjects performed cognitive tests in virtual environments with different design configurations. During the tests, their psychological responses (attention and memory performance) and neurophysiological responses (electrocardiogram, electroencephalogram, and electrodermal response) were recorded. After processing the signals and extracting different metrics, correlations between the two types of responses were studied. This provided a basis of relationships for the future choice of metrics with which to train predictive models. The use of Artificial Intelligence will make it possible to automatically quantify the impact of classroom design on students'attention and memory, using indices based on neurophysiological measures.Escuela Técnica Superior de Ingeniería de EdificaciónCODATIE–Conferencia de Directores de Arquitectura Técnica e Ingeniería de EdificaciónConsejo General de la Arquitectura Técnica de EspañaUniversitat Politècnica de Valénci

La Inteligencia Artificial y su contribución a la optimización de la atención y memoria de los estudiantes a través del diseño del aula

La aplicación de la Inteligencia Artificial en el sector de la educación ha sido objeto de estudio durante décadas. Sin embargo, y a pesar de sus numerosas contribuciones, apenas existen estudios centrados en mejorar el rendimiento de los estudiantes a través del diseño del aula. El objeto del presente trabajo es la aplicación de la Inteligencia Artificial para identificar el diseño óptimo del aula (atendiendo a su color, iluminación y forma), para potenciar el rendimiento en atención y memoria de los estudiantes universitarios. Para ello se llevó a cabo un estudio en laboratorio en el que 50 participantes realizaron pruebas cognitivas en entornos virtuales con diferentes configuraciones de diseño. Los resultados muestran que el mejor rendimiento en atención y memoria se consigue con un diseño similar: aulas de menores dimensiones (altura de techo de 2,6 m y 7,6 m de ancho), con colores fríos y de saturaciones bajas, y con temperaturas del color de la iluminación de 6500K. La única diferencia se detecta en la iluminancia: requiere niveles más bajos (100lx) para potenciar la memoria; y más altos (500lx) para la atención. Los resultados pueden ser de utilidad tanto para investigadores como profesionales relacionados con el diseño de centros docentes.The application of Artificial Intelligence to education has been studied for decades. However, despite its numerous contributions, there are hardly any studies focused on improving student performance through classroom design. The aim of this paper is to apply Artificial Intelligence to identify the optimal classroom design (based on colour, lighting and shape) to enhance the attention and memory performance of university students. To this end, a laboratory study was carried out in which 50 participants performed cognitive tests in virtual environments with different design configurations. The results show that the best performance in attention and memory is achieved with a similar design: smaller classrooms (ceiling height of 2.6 m and width of 7.6 m), with cool colours and low saturations, and with lighting colour temperatures of 6500K. The only difference is in the illuminance: it requires lower levels (100lx) to enhance memory; and higher levels (500lx) for attention. The results may be useful for both researchers and professionals involved in the design of educational centres.Escuela Técnica Superior de Ingeniería de EdificaciónCODATIE–Conferencia de Directores de Arquitectura Técnica e Ingeniería de EdificaciónConsejo General de la Arquitectura Técnica de EspañaUniversitat Politècnica de Valénci

Artificial Intelligence and its contribution to optimising students' attention and memory through classroom design

[EN] The application of Artificial Intelligence to education has been studied for decades. However, despite its numerous contributions, there are hardly any studies focused on improving student performance through classroom design. The aim of this paper is to apply Artificial Intelligence to identify the optimal classroom design (based on colour, lighting and shape) to enhance the attention and memory performance of university students. To this end, a laboratory study was carried out in which 50 participants performed cognitive tests in virtual environments with different design configurations. The results show that the best performance in attention and memory is achieved with a similar design: smaller classrooms (ceiling height of 2.6 m and width of 7.6 m), with cool colours and low saturations, and with lighting colour temperatures of 6500K. The only difference is in the illuminance: it requires lower levels (100lx) to enhance memory; and higher levels (500lx) for attention. The results may be useful for both researchers and professionals involved in the design of educational centres.[ES] La aplicación de la Inteligencia Artificial en el sector de la educación ha sido objeto de estudio durante décadas. Sin embargo, y a pesar de sus numerosas contribuciones, apenas existen estudios centrados en mejorar el rendimiento de los estudiantes a través del diseño del aula. El objeto del presente trabajo es la aplicación de la Inteligencia Artificial para identificar el diseño óptimo del aula (atendiendo a su color, iluminación y forma), para potenciar el rendimiento en atención y memoria de los estudiantes universitarios. Para ello se llevó a cabo un estudio en laboratorio en el que 50 participantes realizaron pruebas cognitivas en entornos virtuales con diferentes configuraciones de diseño. Los resultados muestran que el mejor rendimiento en atención y memoria se consigue con un diseño similar: aulas de menores dimensiones (altura de techo de 2,6 m y 7,6 m de ancho), con colores fríos y de saturaciones bajas, y con temperaturas del color de la iluminación de 6500K. La única diferencia se detecta en la iluminancia: requiere niveles más bajos (100lx) para potenciar la memoria; y más altos (500lx) para la atención. Los resultados pueden ser de utilidad tanto para investigadores como profesionales relacionados con el diseño de centros docentes.Este trabajo ha sido financiado por el Ministerio de Economía, Industria y Competitividad de España (Proyecto BIA2017-86157-R; PRE2018-084051).Colomer Granero, A.; Higuera Trujillo, JL.; Naranjo Ornedo, V.; Llinares Millán, MDC. (2021). La Inteligencia Artificial y su contribución a la optimización de la atención y memoria de los estudiantes a través del diseño del aula. En EDIFICATE. I Congreso de Escuelas de Edificación y Arquitectura Técnica de España. Editorial Universitat Politècnica de València. 473-482. https://doi.org/10.4995/EDIFICATE2021.2021.13251OCS47348